抓取币圈一手信息的两个利器
昨晚在三胖(那个在金拱门域名上1小时赚1万的骚年)群里偶然看到这张截屏,里面这句话“真正区分人与人智识层级的,是我们能够获得的信息的质量。在信息质量的差异面前,解读信息的能力几乎不值一提”,不能更赞同。
之前李笑来“区块链生存指南”群(注:此群现已无法加入)的那些个群友,和身边人并没多大差距。也许就因为群里一次分享中了解到的信息,和身边人拉开几十年差距。其实也不过是掌握信息质量不同而已。
信息质量最重要的一点就是时效性,想想那些高频交易者,同一策略,快 1 毫秒 winner 赚走 100% 收益,loser 什么都没有。
这里给大家分享两个时效信息抓取工具:谷歌快讯 和 Distill。
一、谷歌快讯(Google Alerts)
我们经常会关注某一特定领域最新信息,因为发布时间未知,检索常常徒劳无功,有没有简单方案呢,谷歌快讯就是解决这一问题的利器。网址:
https://www.google.com/alerts
拿生成以太坊相关最新信息报表举例:
设置步骤如上图,每个步骤页面下方快讯预览均会给出反馈:
1、输入搜索内容,点击「显示选项」进行设置。
2、频率:分为有新动态、每天一次、每周一次 3 种,默认「有新动态时」。
3、来源:分为以下 8 种,功能顾名思义,根据需要选择,默认「自动」。
4、语言 及 国家/地区 均根据需要选择。
5、数量:建议选择「仅限最佳结果」,否则按上面频率设定通知邮件会塞满你邮箱。
6、发送到:两种选择,此账号绑定的 Gmail 邮箱 或 RSS 订阅,如果想发送到别的邮箱,在 Gmail 里建个过滤器(Filter)即可。
自此,每当抓取到最新信息,会自动发送新闻简报,如下图:
二、Distill
有时候我们关注某网页,希望当页面 内容发生改变/出现我们需要的信息/满足某特定条件 后立刻得到通知。Distill 就是为此而生。
Distill 是一个网页监控工具,分为网页版(收费)及插件版。官网地址:
https://distill.io
此处只讲述插件版(安装方法)使用方法,此处以为简书专题「区块链研习社」设定收录文章数量改变通知为例,网址:
https://www.jianshu.com/c/b17f09dc2831
流程如上图:
1、在官网 注册账户 并 安装插件 后转到抓取页面。
2、点击图标,点选「选择页面的某些部分」。
3、从页面中选择需监测部分,注意此时右下角会显示出监测文本。
4、我们只关心文章数,不希望关注人数变化产生的通知,此时在下方 Text filter 空格处填入正则表达式“收录了[0-9]+篇文章”,按 Tab 切换输入框后监测文本缩短为我们需要监控的部分。
正则表达式是个有趣的问题,随后课程会讲到。
5、点击 「Save selections」 进入如下设置界面:
调整下红框内监测间隔,为规避网站反爬虫机制,我设置的是 5~30 秒内随机抓取。
6、确认后你就可以做自己的事了,Distill 会在后台自动运行,一旦抓取到网页改变,会弹出浏览器及系统通知(见下图)并伴有提示音。
三、学习交流
今天分享的两个工具各有所长,谷歌快讯用于嗅探全网全站信息,Distill 用于网页更新监控。可根据实际需要作出选择。
【福利】
1、爬虫技能微信群 ,回复 社群 了解加入方式,一起切磋,互开脑洞。
2、爬虫学习材料,在线文档,欢迎关注。网址:
https://shimo.im/docs/qc5HJYODsNQJcL6k/
3、三胖 一起赚钱 知识星球二维码,通过我的邀请入群你可获得 47.88 元折扣。
您可能对以下文章也感兴趣: